|
2024年11月6日记者获悉,经过一年奋战,小红书已把业界体量最大的数据湖0故障迁上阿里云。据统计,该项目共有1500人参与,迁移数据500PB。 作为中国头部互联网公司之一,小红书月活已过3亿,其数据湖存储了过去11年的所有原始数据,包括结构化、半结构化和非结构化数据。近年来,随着业务的高速增长,小红书在线处理数据的需求不断增加,同时...
2024年11月8日11月6日，阿里云宣布，小红书技术团队成功将业界最大数据湖零故障迁移至阿里云。据悉，目前月活用户已经超过3万的小红书数据湖中存储了过去11年的所有原始数据，包括结构化、半结构化和非结构化数据。随着小红书的发展，处理数据难度增大，小红书决定将数据化搬迁到阿里云，该项目从2023年11月开始。彼时，小红书共有1500人...
2024年11月6日小红书将业界最大数据湖迁至阿里云 华尔街见闻获悉，历经一年，小红书已把业界体量最大的数据湖迁上阿里云。据了解，小红书的数据湖存储了过去11年的所有原始数据，包括结构化、半结构化和非结构化数据。随着业务的高速增长，其在线处理数据的需求不断增加，为此去年11月，小红书发起迁云项目。
2024年11月6日快科技11月6日消息，今天阿里云宣布，小红书技术团队近日完成了一项业界前所未有的壮举，将业界最大数据湖0故障迁移至阿里云。作为中国头部互联网公司之一，小红书月活用户已超过3亿，其数据湖存储了过去11年的所有原始数据，包括结构化、半结构化和非结构化数据。随着业务的高速增长，小红书对在线处理数据的需求不断增加...
2024年11月6日小红书成功将其庞大的数据湖迁移至阿里云,该数据湖包含了 11 年的数据,涉及结构化、半结构化和非结构化数据。项目耗时一年,共有 1500 人参与。迁移完成后,利用阿里云的资源池和 HDFS+DLA 元数据功能,有效支持了小红书业务的复杂性和数据量的增长。项目分为三个阶段:标
2025年1月14日$云赛智联(SH600602)$ 小红书使用的是阿里云的数据中心。经过一年的努力,小红书于2024年11月将业界体量最大的数据湖0故障迁上阿里云,迁移数据达500PB。阿里云最重要的两家硬件供应商:- 浪潮信息 :与 阿里 等互联网大厂采用联合设计开发制造合作模式,将深度受益于算力需
2024年11月7日就像一群守护数据宝藏的勇士,确保每一份数据都能安全到达目的地。 2.3、顺利完成“搬家”任务 经过双跑阶段的验证后,小红书的数据湖迁徙进入了最后的割接阶段。这个阶段的主要任务是将数据从旧的数据湖完全迁移到阿里云上,完成整个迁徙过程。 这一步骤看似简单,但实际上充满了挑战。因为在这个过程中,需要确保数据的...
2024年11月6日最近,小红书技术团队完成了一件前所未有的壮举: 一年内,把业界最大数据湖0故障迁上阿里云。 壮举的背后意味着风险和挑战。 作为中国头部互联网公司之一,小红书月活用户已过3亿,其数据湖存储了过去11年的所有原始数据,包括结构化、半结构化和非结构化数据。近年来,随着业务的高速增长,小红书在线处理数据的需求不断增...
